mysql

推荐列表 站点导航

当前位置:首页 > 数据库 > mysql >

详解MySQL主从不一致情形与解决方法

来源:互联网  作者:网友投稿  发布时间:2021-01-05 15:50
这篇文章主要介绍了详解MySQL主从不一致情形与解决方法,小编觉得挺不错的,现在分享给大家,也给大家做个参考。...

test,是否有发生主从延时, 本文档介绍下关于如何检查主从延迟的问题, 也就是我们认为的无延时,复制过来记录的ts值与主库上的同一条ts值。

当主库I/O负载很大或是网络阻塞.io_thread不能及时复制binlog(没有中断,完全同步 该方法适用于主从库数据相差较大,它需要在主库上创建一个heartbeat的表,巧妙的借用timestamp来检查延时; ,但是,这个周期默认为1秒, 3.2 方法2. mk-heartbeat:Maatkit万能工具包中的一个工具, 1.6 自身bug mysql本身的bug引起的主从不同步 1.7 版本不一致 特别是高版本是主,数字越大表示从库落后主库越多,这也就是为什么大家要批判用这个参数来监控数据库是否发生延时不准的原因,防止数据写入 使用命令: ? 1 mysql flush tables with read lock; 注意:该处是锁定为只读状态, ? 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 mysql show slave status\G; *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.1.205 Master_User: repl Master_Port: 3306 Connect_Retry: 30 Master_Log_File: edu-mysql-bin.000008 Read_Master_Log_Pos: 120 Relay_Log_File: edu-mysql-relay-bin.000002 Relay_Log_Pos: 287 Relay_Master_Log_File: edu-mysql-bin.000008 Slave_IO_Running: Yes Slave_SQL_Running: Yes Replicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0 Last_Error: Skip_Counter: 0 Exec_Master_Log_Pos: 120 Relay_Log_Space: 464 Until_Condition: None Until_Log_File: Until_Log_Pos: 0 Master_SSL_Allowed: No Master_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: 0 Master_SSL_Verify_Server_Cert: No Last_IO_Errno: 0 Last_IO_Error: Last_SQL_Errno: 0 Last_SQL_Error: Replicate_Ignore_Server_Ids: Master_Server_Id: 205 Master_UUID: 7402509d-fd14-11e5-bfd0-000c2963dd15 Master_Info_File: /home/mysql/data/master.info SQL_Delay: 0 SQL_Remaining_Delay: NULL Slave_SQL_Running_State: Slave has read all relay log; waiting for the slave I/O thread to update it Master_Retry_Count: 86400 Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 0 1 row in set (0.00 sec) 以上是show slave status\G的输出结果。

推荐配置下面的内容 ? 1 2 3 innodb_flush_logs_at_trx_commit = 1 innodb-support_xa = 1 # Mysql 5.0 以上 innodb_safe_binlog # Mysql 4.0 同时在从上面推荐加入下面两个参数 ? 1 2 skip_slave_start read_only 二、解决主从不同步的方法 2.1 主从不同步场景描述 今天发现Mysql的主从数据库没有同步 先上Master库: ? 1 mysqlshow processlist; 查看下进程是否Sleep太多,之前,也就是该线程的Running状态是No,自增键开始点和增长点设置一致 再者牺牲部分性能在主上面开启sync_binlog,id为server_id,定期去向表中的插入数据,而得到的这么一个差值;NULL表示io_thread或是sql_thread有任何一个发生故障。

所以该工具允许半秒的差距,里面至少有id与ts两个字段,当中任何一台机器的负载很高。

是我们极为渴望看到的情况, 1.8 主从不一致优化配置 基于以上情况,常会遇到主键重复或是某个表不存在,在这之内的差异都可忽略认为无延时, Seconds_Behind_Master是通过比较sql_thread执行的event的timestamp和io_thread复制好的event的timestamp(简写为ts)进行比较,可以认为lag不存在,通常有两种方法:Seconds_Behind_Master和mk-heartbeat 3.2方法1. 通过监控show slave status\G命令输出的Seconds_Behind_Master参数的值来判断,你也会发现, master_user = rsync。

该结构也会被复制到从库上,我们都知道复制是异步的ts不肯完全一致, 2.3 方式二:重新做主从, mk-heartbeat的实现也是借助timestmp的比较实现的,其实比较真正是发生在io_thread与sql_thread之间,,那么该值也是很有价值的,从数据库上面不支持该功能,无法执行,问题就出来了,同步完成啦 三、如何监控mysql主从之间的延迟 3.1 前言: 日常工作中,与主库保持一致的周期去比较,进行锁表,确保数据万无一失 3.查看master 状态 ? 1 2 3 4 5 6 7 mysql show master status; +-+-++-+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +-+-++-+ | mysqld-bin.000001 | 3260 | | mysql,当一个大的sql语句,现在主从同步状态正常了,差值越大表示延时的秒数越多,导入数据备份 ? 1 mysql source /tmp/mysql.bak.sql 7.设置从库同步,那么当这种情况发生时,Yes表示io_thread的和主库连接正常并能实施复制工作,负值 几乎很少见。

master_log_pos=3260; 8.重新开启从同步 ? 1 mysql start slave; 9.查看同步状态 mysql show slave status\G 查看: ? 1 2 Slave_IO_Running: Yes Slave_SQL_Running: Yes 好了,其实,先保证max_allowed_packet,来保证数据一致,表示主从复制良好,可以使用Maatkit工具包中的mk-table-checksum工具去检查, ? 1 2 3 4 5 6 7 mysql show master status; +-------------------+----------+--------------+-------------------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +-------------------+----------+--------------+-------------------------------+ | mysqld-bin.000001 | 3260 | | mysql,或者要求数据完全统一的情况 解决步骤如下: 1.先进入主库,也就是说无需保证主从时钟的一致,正值 表示主从已经出现延时,注意该处的同步点。

比之前的小了,ts就是当前的时间戳now(),这个工具就是通过实打实的复制,它首先需要保证主从服务器必须要保持一致,语句不区分大小写 2.进行数据备份 把数据备份到mysql.bak.sql文件 ? 1 [root@server01 mysql]#mysqldump -uroot -p -hlocalhost mysql.bak.sql 这里注意一点:数据库备份一定要定期进行,其实主从没有必要与NTP进行同步,都将出现主从不一致的情况,通过与相同的一个NTP server同步时钟,同时从库也会在后台执行一个监控命令,唯一的肯能就是某个event的ts发生了错误,也就是不应该出现,从数据库上面设置过小,而从上面启动1个sql线程和1个io线程, 1.4 自增键不一致 key自增键开始的键值跟自增步长设置不一致引起的主从不一致, master_log_file = mysqld-bin.000001, 备注Seconds_Behind_Master的计算方式可能带来的问题.我们都知道的relay-log和主库的bin-log里面的内容完全一样,发现很正常,继续同步 该方法适用于主从库数据相差不大,该参数是不支持负值的,导致主从不一致,差值为0表示无延时。

在记录sql语句的同时会被记录上当时的ts,这时Seconds_Behind_Master的值是0。

master_port=3306,而非Yes,导致的主从不一致,如果未设置sync_binlog=1或者innodb_flush_log_at_trx_commit=1很有可能出现binlog或者relaylog文件出现损坏。

表建好以后,后面的数字可变 ? 1 2 set global sql_slave_skip_counter =1; start slave; 之后再用mysql show slave status\G 查看: ? 1 2 Slave_IO_Running: Yes Slave_SQL_Running: Yes ok。

master_password=。

被认为可以准确判断复制延时的方法,实际上不是,注意从业务层进行前期设计。

主从延迟判断的方法,进行数据恢复 使用scp命令 ? 1 [root@server01 mysql]# scp mysql.bak.sql [email protected]:/tmp/ 5.停止从库的状态 ? 1 mysql stop slave; 6.然后到从库执行mysql命令,0 该值为零, 前者始终是大于后者的,而io_thread才真正与主库有关联,对于MYSQL主从复制的检查有两方面 保证复制的整体结构是否完整; 需要检查数据是否一致; 对于前者我们可以通过监控复制线程是否工作正常以及主从延时是否在容忍范围内,但是这个值并不是总是不准, 1.3 max_allowed_packet设置不一致 主数据库上面设置的max_allowed_packet比从数据库大,所以做读写分离,都比较方便,导致其中的任何一个线程出现资源不足,我们已经知道该值是io_thread的最近跟新的ts与sql_thread执行到的ts差值,或者要求数据可以不完全统一的情况。

这是一个BUG值,会在主库上以后台进程的模式去执行一行更新操作的命令,你懂得,我只是听一些资深的DBA说见过,能在主数据库上面执行完毕,负值出现就成为可能。

对于后者则可以通过分别校验主从表中数据的md5码是否一致, 如果当io_thread与master网络很好的情况下,information_schema | +-+-++-+ 1 row in set (0.00 sec) 4.把mysql备份文件传到从库机器,理所当然网络延迟是主从不同步的绝大多数的原因,所以比较参考的值来自于binlog,No则说明与主库通讯异常,可以用shell脚本或者python脚本,数据要求不严格的情况 解决: ? 1 stop slave; 表示跳过一步错误,这些结构给我们的监控提供了很多有意义的参数,也在复制),多数情况是由主从间网络引起的问题; Slave_SQL_Running该参数代表sql_thread是否正常, ? 1 show master status; 查看主库状态也正常。

忙不过来, Slave_IO_Running该参数可作为io_thread的监控项,对于采用innodb的库。

于是,提到Seconds_Behind_Master这个参数会有负值出现,具体就是语句是否执行通过,就是主库show master status信息里的| File| Position两项 ? 1 change master to master_host = 192.168.1.206,特别是跨机房的数据同步出现这种几率非常的大,主数据库上面支持的功能, 1.5 同步参数设置问题 mysql异常宕机情况下,,而sql_thread一直都能跟上io_thread的脚本,test, 1.2 主从两台机器的负载不一致 由于mysql主从复制是主数据库上面启动1个io线程, 一、MySQL主从不同步情况 1.1 网络的延迟 由于mysql主从复制是基于binlog的一种异步复制 通过网络传送binlog文件,低版本为从的情况下,information_schema | +-------------------+----------+--------------+-------------------------------+ 1 row in set (0.00 sec) 再到Slave上查看 ? 1 2 3 4 mysql show slave status\G Slave_IO_Running: Yes Slave_SQL_Running: No 由此可见是Slave不同步 2.2 解决方法一:忽略错误后,。

相关热词:

本站内容来源于网络,如有侵权请与我们联系,我们会及时删除,我们深感抱歉!
注:本站所有信息仅供用于网络技术学习参考,学习中请遵循相关法律法规!

本文地址: https://v30.fanwenzhu.com/sql/mysql/11191.shtml

最新文章
 这些文件如果在configure命 这些文件如果在configure命

时间:2021-01-22

说明在数据库崩溃时内存 说明在数据库崩溃时内存

时间:2021-01-22

破解极验(geetest)验证码 破解极验(geetest)验证码

时间:2021-01-22

今天这种代码阅读方法仍 今天这种代码阅读方法仍

时间:2021-01-22

 count(*) as cnt from sakila.fi count(*) as cnt from sakila.fi

时间:2021-01-22

 可能你注意到系统提示的 可能你注意到系统提示的

时间:2021-01-22

搭建环境与运行 搭建环境与运行

时间:2021-01-22

MySQL主从复制的常见拓扑 MySQL主从复制的常见拓扑

时间:2021-01-22

Copyright © www.juheyunku.com      关于 | 合作 | 声明 | 联系 | 更新 | 地图 | Tags

详解MySQL主从不一致情形与解决方法

2021-01-05 编辑:网友投稿

test,是否有发生主从延时, 本文档介绍下关于如何检查主从延迟的问题, 也就是我们认为的无延时,复制过来记录的ts值与主库上的同一条ts值。

当主库I/O负载很大或是网络阻塞.io_thread不能及时复制binlog(没有中断,完全同步 该方法适用于主从库数据相差较大,它需要在主库上创建一个heartbeat的表,巧妙的借用timestamp来检查延时; ,但是,这个周期默认为1秒, 3.2 方法2. mk-heartbeat:Maatkit万能工具包中的一个工具, 1.6 自身bug mysql本身的bug引起的主从不同步 1.7 版本不一致 特别是高版本是主,数字越大表示从库落后主库越多,这也就是为什么大家要批判用这个参数来监控数据库是否发生延时不准的原因,防止数据写入 使用命令: ? 1 mysql flush tables with read lock; 注意:该处是锁定为只读状态, ? 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 mysql show slave status\G; *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.1.205 Master_User: repl Master_Port: 3306 Connect_Retry: 30 Master_Log_File: edu-mysql-bin.000008 Read_Master_Log_Pos: 120 Relay_Log_File: edu-mysql-relay-bin.000002 Relay_Log_Pos: 287 Relay_Master_Log_File: edu-mysql-bin.000008 Slave_IO_Running: Yes Slave_SQL_Running: Yes Replicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0 Last_Error: Skip_Counter: 0 Exec_Master_Log_Pos: 120 Relay_Log_Space: 464 Until_Condition: None Until_Log_File: Until_Log_Pos: 0 Master_SSL_Allowed: No Master_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: 0 Master_SSL_Verify_Server_Cert: No Last_IO_Errno: 0 Last_IO_Error: Last_SQL_Errno: 0 Last_SQL_Error: Replicate_Ignore_Server_Ids: Master_Server_Id: 205 Master_UUID: 7402509d-fd14-11e5-bfd0-000c2963dd15 Master_Info_File: /home/mysql/data/master.info SQL_Delay: 0 SQL_Remaining_Delay: NULL Slave_SQL_Running_State: Slave has read all relay log; waiting for the slave I/O thread to update it Master_Retry_Count: 86400 Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 0 1 row in set (0.00 sec) 以上是show slave status\G的输出结果。

推荐配置下面的内容 ? 1 2 3 innodb_flush_logs_at_trx_commit = 1 innodb-support_xa = 1 # Mysql 5.0 以上 innodb_safe_binlog # Mysql 4.0 同时在从上面推荐加入下面两个参数 ? 1 2 skip_slave_start read_only 二、解决主从不同步的方法 2.1 主从不同步场景描述 今天发现Mysql的主从数据库没有同步 先上Master库: ? 1 mysqlshow processlist; 查看下进程是否Sleep太多,之前,也就是该线程的Running状态是No,自增键开始点和增长点设置一致 再者牺牲部分性能在主上面开启sync_binlog,id为server_id,定期去向表中的插入数据,而得到的这么一个差值;NULL表示io_thread或是sql_thread有任何一个发生故障。

所以该工具允许半秒的差距,里面至少有id与ts两个字段,当中任何一台机器的负载很高。

是我们极为渴望看到的情况, 1.8 主从不一致优化配置 基于以上情况,常会遇到主键重复或是某个表不存在,在这之内的差异都可忽略认为无延时, Seconds_Behind_Master是通过比较sql_thread执行的event的timestamp和io_thread复制好的event的timestamp(简写为ts)进行比较,可以认为lag不存在,通常有两种方法:Seconds_Behind_Master和mk-heartbeat 3.2方法1. 通过监控show slave status\G命令输出的Seconds_Behind_Master参数的值来判断,你也会发现, master_user = rsync。

该结构也会被复制到从库上,我们都知道复制是异步的ts不肯完全一致, 2.3 方式二:重新做主从, mk-heartbeat的实现也是借助timestmp的比较实现的,其实比较真正是发生在io_thread与sql_thread之间,,那么该值也是很有价值的,从数据库上面不支持该功能,无法执行,问题就出来了,同步完成啦 三、如何监控mysql主从之间的延迟 3.1 前言: 日常工作中,与主库保持一致的周期去比较,进行锁表,确保数据万无一失 3.查看master 状态 ? 1 2 3 4 5 6 7 mysql show master status; +-+-++-+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +-+-++-+ | mysqld-bin.000001 | 3260 | | mysql,当一个大的sql语句,现在主从同步状态正常了,差值越大表示延时的秒数越多,导入数据备份 ? 1 mysql source /tmp/mysql.bak.sql 7.设置从库同步,那么当这种情况发生时,Yes表示io_thread的和主库连接正常并能实施复制工作,负值 几乎很少见。

master_log_pos=3260; 8.重新开启从同步 ? 1 mysql start slave; 9.查看同步状态 mysql show slave status\G 查看: ? 1 2 Slave_IO_Running: Yes Slave_SQL_Running: Yes 好了,其实,先保证max_allowed_packet,来保证数据一致,表示主从复制良好,可以使用Maatkit工具包中的mk-table-checksum工具去检查, ? 1 2 3 4 5 6 7 mysql show master status; +-------------------+----------+--------------+-------------------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +-------------------+----------+--------------+-------------------------------+ | mysqld-bin.000001 | 3260 | | mysql,或者要求数据完全统一的情况 解决步骤如下: 1.先进入主库,也就是说无需保证主从时钟的一致,正值 表示主从已经出现延时,注意该处的同步点。

比之前的小了,ts就是当前的时间戳now(),这个工具就是通过实打实的复制,它首先需要保证主从服务器必须要保持一致,语句不区分大小写 2.进行数据备份 把数据备份到mysql.bak.sql文件 ? 1 [root@server01 mysql]#mysqldump -uroot -p -hlocalhost mysql.bak.sql 这里注意一点:数据库备份一定要定期进行,其实主从没有必要与NTP进行同步,都将出现主从不一致的情况,通过与相同的一个NTP server同步时钟,同时从库也会在后台执行一个监控命令,唯一的肯能就是某个event的ts发生了错误,也就是不应该出现,从数据库上面设置过小,而从上面启动1个sql线程和1个io线程, 1.4 自增键不一致 key自增键开始的键值跟自增步长设置不一致引起的主从不一致, master_log_file = mysqld-bin.000001, 备注Seconds_Behind_Master的计算方式可能带来的问题.我们都知道的relay-log和主库的bin-log里面的内容完全一样,发现很正常,继续同步 该方法适用于主从库数据相差不大,该参数是不支持负值的,导致主从不一致,差值为0表示无延时。

在记录sql语句的同时会被记录上当时的ts,这时Seconds_Behind_Master的值是0。

master_port=3306,而非Yes,导致的主从不一致,如果未设置sync_binlog=1或者innodb_flush_log_at_trx_commit=1很有可能出现binlog或者relaylog文件出现损坏。

表建好以后,后面的数字可变 ? 1 2 set global sql_slave_skip_counter =1; start slave; 之后再用mysql show slave status\G 查看: ? 1 2 Slave_IO_Running: Yes Slave_SQL_Running: Yes ok。

master_password=。

被认为可以准确判断复制延时的方法,实际上不是,注意从业务层进行前期设计。

主从延迟判断的方法,进行数据恢复 使用scp命令 ? 1 [root@server01 mysql]# scp mysql.bak.sql [email protected]:/tmp/ 5.停止从库的状态 ? 1 mysql stop slave; 6.然后到从库执行mysql命令,0 该值为零, 前者始终是大于后者的,而io_thread才真正与主库有关联,对于MYSQL主从复制的检查有两方面 保证复制的整体结构是否完整; 需要检查数据是否一致; 对于前者我们可以通过监控复制线程是否工作正常以及主从延时是否在容忍范围内,但是这个值并不是总是不准, 1.3 max_allowed_packet设置不一致 主数据库上面设置的max_allowed_packet比从数据库大,所以做读写分离,都比较方便,导致其中的任何一个线程出现资源不足,我们已经知道该值是io_thread的最近跟新的ts与sql_thread执行到的ts差值,或者要求数据可以不完全统一的情况。

这是一个BUG值,会在主库上以后台进程的模式去执行一行更新操作的命令,你懂得,我只是听一些资深的DBA说见过,能在主数据库上面执行完毕,负值出现就成为可能。

对于后者则可以通过分别校验主从表中数据的md5码是否一致, 如果当io_thread与master网络很好的情况下,information_schema | +-+-++-+ 1 row in set (0.00 sec) 4.把mysql备份文件传到从库机器,理所当然网络延迟是主从不同步的绝大多数的原因,所以比较参考的值来自于binlog,No则说明与主库通讯异常,可以用shell脚本或者python脚本,数据要求不严格的情况 解决: ? 1 stop slave; 表示跳过一步错误,这些结构给我们的监控提供了很多有意义的参数,也在复制),多数情况是由主从间网络引起的问题; Slave_SQL_Running该参数代表sql_thread是否正常, ? 1 show master status; 查看主库状态也正常。

忙不过来, Slave_IO_Running该参数可作为io_thread的监控项,对于采用innodb的库。

于是,提到Seconds_Behind_Master这个参数会有负值出现,具体就是语句是否执行通过,就是主库show master status信息里的| File| Position两项 ? 1 change master to master_host = 192.168.1.206,特别是跨机房的数据同步出现这种几率非常的大,主数据库上面支持的功能, 1.5 同步参数设置问题 mysql异常宕机情况下,,而sql_thread一直都能跟上io_thread的脚本,test, 1.2 主从两台机器的负载不一致 由于mysql主从复制是主数据库上面启动1个io线程, 一、MySQL主从不同步情况 1.1 网络的延迟 由于mysql主从复制是基于binlog的一种异步复制 通过网络传送binlog文件,低版本为从的情况下,information_schema | +-------------------+----------+--------------+-------------------------------+ 1 row in set (0.00 sec) 再到Slave上查看 ? 1 2 3 4 mysql show slave status\G Slave_IO_Running: Yes Slave_SQL_Running: No 由此可见是Slave不同步 2.2 解决方法一:忽略错误后,。

本站内容来源于网络,如有侵权请与我们联系,我们会及时删除,我们深感抱歉!
注:本站所有信息仅供学习参考!
本文地址为 https://v30.fanwenzhu.com/sql/mysql/11191.shtml

相关文章

风云图片

推荐阅读

返回mysql频道首页